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Параметризація типів речень предметної 
області для системи 
усного фразника-перекладача 


У статті розглядаються підходи побудови системи перекладу усномовного сигналу в межах предметних 
областей. Блок інтерпретації отримує вимовлене речення у вигляді розпізнаної декодером послідовності слів. 
На виході системи приймається рішення про належність розпізнаної послідовності слів до типу речення, що 
задає тип смислу. Розпізнавання виконується з урахуванням параметрів, що описують множину можливих 
варіантів висловів у фразах при спілкуванні. Проаналізовані альтернативні підходи, щодо моделювання 
обмежень на допустимі послідовності слів у фразах. Описано ймовірнісне оцінювання належності 
розпізнаної послідовності слів до певного типу речення. 


Вступ 


Задача розпізнавання усномовного сигналу мови передбачає не лише автома- 
тичне відновлення текстів, що вимовляються людиною у вигляді слів, фраз, речень 
природною мовою. Не менш важливо розуміти, що сказано диктором. З одного боку, 
це дає змогу формувати більш адекватну відповідь розпізнавання. З іншого боку, маючи 
змогу оперувати смислами, легко перейти до того самого смислу, але вже іншою мовою, 
отримуючи таким чином систему усного перекладу. 

Серед важливих практичних задач, пов'язаних з розпізнаванням мови, до яких від- 
носяться система диктування текстів, довідкова система, система мовленнєвого керування 
різними пристроями, системи мовленнєвого діалогу (наприклад, по телефону) тощо, 
ми виокремимо систему усного перекладу. Її актуальність полягає, зокрема, в автома- 
тизації розмовника, відомого всім у вигляді паперової книжки. Ця книжка розбита на 
теми, має безліч сторінок. Користувач вимушений шукати потрібну фразу та ще Й «озву- 
чувати» переклад іншою мовою своїм голосом. Натомість пропонується користувачеві 
лише вимовити фразу рідною мовою з обраної теми. Далі система все робить сама. 
Додаткової уваги тут потребує питання моделювання параметрів у реченнях. Тобто 
необхідно передбачити всі можливі варіанти значень для певного речення. Наприклад, 
у питанні щодо подорожі до певного міста параметром є назва міста, оскільки існує 
деяка скінченна множина міст, куди можна поїхати. 

Такі системи є актуальними з огляду на використання їх при розмові з іншо- 
мовною особою. Користувач отримує переклад фрази іншою мовою у візуальній або 
звуковій формі, що має спростити спілкування в іншомовному середовищі. 

При побудові систем усного перекладу в межах предметних областей виникає 
ряд проблем, спільних з проблемами задачі розуміння мовленнєвого сигналу. Необхідно 
побудувати моделі всіх можливих речень мови діалогу, що виражають один і той 
самий зміст, змоделювати параметри слів у типах речень, згенерувати та відшукати 
найбільш правдоподібні еталонні сигнали, враховуючи параметри. Хоч і не так явно, 
але у слов'янських мовах все ж існують обмеження на порядок слідування слів, які 
слід враховувати, використовуючи лінгвістичні знання. 
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Для дослідження та специфікації обмежень на допустимі послідовності слів у 
фразах використовувалися ШІЯР-структури (11, |21. На основі цих структур генерується 
величезна кількість речень, що мають один і той самий зміст з точністю до параметрів. 
Втім, існує ряд обмежень на застосування цієї технології, пов'язаних як з суб'єктивним 
чинником при побудові ІІ5Р-структур, так і зі збільшенням обчислень, викликаних 
значним ускладненням графа розпізнавання. 

Як альтернатива до ЩІЗР-структур пропонувався спосіб оцінювання належності 
послідовності слів типам речень, що характеризують смисл |З). Цей підхід потребує роз- 
винення, зокрема, з метою аналізу можливих помилок розпізнавання в процесі смислової 
інтерпретації. 

Для моделювання обмежень на порядок слідування слів застосовувалися граматичні 
знання |2), що і надалі використовуються в дослідженнях. 

Для моделювання параметрів у типах речень використовувалися бази даних та бази 
знань. Була сформульована лінгвістична модель інтерпретації розпізнаного сигналу з 
врахуванням параметрів. 

Спочатку розглянуто загальну структуру системи усного перекладу, наступний роз- 
діл присвячено опису моделювання типів речень з урахуванням параметрів, далі пропо- 
нується розглянути спосіб оцінювання належності послідовності слів до типу речень, 
насамкінець описуються експериментальні дослідження. 


Загальна структура системи усного перекладу 
в межах предметних областей 


Розпізнавання та змістовна інтерпретація злитого мовлення виконується в єдиному 
взаємопов'язаному процесі. Кінцевою метою цього процесу є зміст повідомлення, який 
передається послідовністю слів, та його переклад іншою мовою. 

Розглянемо, в чому полягають 1 як взаємопов'язані задачі розпізнавання та інтер- 
претації злитого мовлення | |, 21. Розпізнавання мови -- це процес автоматичної обробки 
сигналу з метою визначення послідовності слів, які передаються цим сигналом. Зміс- 
товна інтерпретація мови -- це процес автоматичної обробки мовленнєвого сигналу з ме- 
тою виявлення змісту, що передається сигналом, та представлення цього змісту в певній 
канонічній формі, зручній для подальшого використання в системі усного перекладу. 

Очевидно, що змістовна інтерпретація мови є більш високим ступенем узагаль- 
нення інформації, ніж розпізнавання. Оскільки кожну думку можна висловити різними 
реченнями в мові діалогу, але при цьому зміст не зміниться, то слід визначити певні об- 
меження на допустимі послідовності слідування слів у реченнях. Тому, при інтерпретації 
змісту мови різні речення, що передають одну і ту саму думку, повинні відображатися 
в один і той же результат, тобто відповідь розпізнавання (послідовність слів) не повинна 
суперечити синтаксису, семантиці та прагматиці предметної області. 

Зважаючи на це, пропонується розглянути структуру системи усного перекладу 
в межах предметних областей (рис. 1). Задача змістовної інтерпретації злитого мовлення 
з метою подальшого перекладу грунтується на тому, що спочатку користувач має задати 
предметну область (ПО), з якою він бажає працювати. Для цього потрібно назвати 
цю ПО. Взагалі розглядається 15 ПО, з якими може працювати користувач. Активатор 
вибирає названу з 15 ПО і завантажує підсловник ПО з відповідними до цієї області ТР та 
граматику, за якою моделюються допустимі обмеження на послідовності слів у реченнях. 
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Рисунок І - Структура системи усного перекладу в межах предметних областей 


Диктор вимовляє мовою 1 деяке речення, що розпізнається з урахуванням акустич- 
ної моделі та побудованої згідно зі словником відповідної ПО та граматики, лінгвістич- 
ної моделі (І.М). Потім обирається п кращих послідовностей слів і порівнюється зі 
згенерованими моделями речень, які можуть задавати відповідний ТР. Використовуючи 
імовірнісне оцінювання, приймається рішення про належність розпізнаної послідовності 
слів до ТР. За цим ТР визначається 13 1 інтерпретатор знаходить відповідний ТЗ іншою 
мовою. На виході ми маємо отримати текст мовою 2, який може бути озвученим від- 
повідною системою озвучення текстів мовою 2. 

В описаній структурі перекладу залишається досить складною задача інтерпре- 
тації відповіді розпізнавання. Шляхи розв'язку цієї задачі, описані в |2), грунтуються 
на економному задаванні всіх можливих допустимих речень у мові діалогу. 

Таким чином, автоматичний переклад фрази вимовленої мовою І на мову 2 з 03- 
вученням результату, за допомогою пропонованої структури усного перекладу в рамках 
предметних областей буде полягати в тому, щоб спочатку для сигналу, що подається 
(вимовляється диктором), знайти найбільш правдоподібний, можливо, параметризований, 
тип речення серед всіх типів речень, які задають тип змісту, а потім визначити сам 
тип змісту того змістовного висловлювання, що було вимовлене, та знайти для нього 
відповідний тип змісту в мові 2 з урахуванням параметрів. Насамкінець, речення, отри- 
мане мовою 2, озвучується. 

Далі буде розглянуто способи генерування речень мови діалогу, що виражають 
один 1 той самий зміст, але набувають певної деталізації, яка передається парамет- 
рами, та пошуку найбільш правдоподібних типів речень та розроблення обмежень на 
допустимі послідовності слів згідно зі структурами, якими можна представити речення. 


Моделювання типів речень з урахуванням параметрів 


Оскільки структура перекладу повинна працювати в межах предметних облас- 
тей, то пропонується розглянути певну ієрархію мовленнєвих образів |2). Мається на 
увазі, що вся діяльність людини розбивається на предметні області (ПО) за типом 
тем паперового розмовника. Кожна ПО складається зі скінченної множини типів 
змістів (13). В кожен ТЗ входить множина еквівалентно змістовних типів речень 
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(ТР). Тип речення - це конструкція, що економно задає множину речень, отриманих 
з одного речення незалежними допустимою заміною та допустимою перестановкою 
чи випадінням слів та словосполучень. 

В межах задачі розпізнавання, інтерпретації та перекладу мовленнєвого сигналу 
надзвичайно важливим є питання опису параметрів слів у фразах, де можуть бути різні 
варіанти власних назв, часу, адрес тощо. Значення терміна «параметр» може мати різну 
інтерпретацію в залежності від того, в якому контексті він вживається. Загалом пара- 
метром називають величину, значення якої служить для розрізнення елементів деякої 
множини між собою. 

У даній статті пропонується розглянути параметри, що описують множину мож- 
ливих варіантів висловів у фразах при спілкуванні. Розглянемо приклад ТР прохання 
розбудити людину в певний час з ПО «Готель». Базова структура матиме вигляд (рис. 2): 


о Зіте:арр 
мене 
; будь ласка в 
(розбудіть| нас | 
й б у | Збте 
через 


Рисунок 2 - Базова структура ТР 


В дужках () вказані підсловники, які можна переставляти місцями, а в || - які не 
можна переставляти. Переставляти підсловники можна лише всередині старших 
дужок. Символ " означає порожнє слово. 

Цією структурою можна згенерувати досить багато речень з урахуванням 
параметрів. Серед них можуть бути, наприклад, такі: 

Розбудіть мене, будь ласка о сьомій годині. 

Будь ласка, нас розбудіть о п'ятій ранку. 

О сьомій тридцять розбудіть мене. 

Розбудіть мене через шість годин. 

Розбудіть нас у шість. 

У наведених прикладах останнє речення є розмовним, а не літературним, на 
практиці так висловлюються, і ми маємо це врахувати. 

У прикладі типу речення параметром є «часові призначення»: 5ійте:арр, 5ійте. 
Розглянемо перший параметр Зйте:арр. Він описує будь-який час з точністю до, на- 
приклад, хвилин, в контексті призначення деякої події. Цей параметр є дуже складним, 
оскільки людина може висловити час багатьма способами: вказувати або на одиницю 
виміру часу (години, хвилини), період доби. Щоб передбачити всі варіанти та значення 
цих параметрів вводиться спеціально розроблена 1 описана параметрична граматика 
словника на основі форми Бекуса-Наура (ВМ). Таку граматику можна подати у розгор- 
нутому вигляді (табл. 1 12). 

В наведеному прикладі базова структура задає 4!:1:3:2:4-576 параметризованих 
речень, допустимих у мові усного діалогу. Якщо врахувати, що кожен параметр містить 
величезну кількість варіантів, кількість речень значно зросте. 

Всі речення мови діалогу можна задавати за допомогою ТС 1 відповідних їм ТР, 
використовуючи структуру, наведену у прикладі. За допомогою ІЛХЯР-структур 
генерується величезна кількість речень, що мають один і той самий зміст. Оскільки 
побудова 1І15Р-структур є досить громіздкою, потребує багато ручної роботи, то 
було розроблено автоматизований специфікатор предметних областей. 
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Таблиця 1 - Базові структури параметрів часового призначення 


позначення приклад параметризація для української мови 
о шостій Зрбоиг:паді-аї 
о шостій тридцять Зроиг:пад|-аї |Зїсеп:п | Здес:5 тах) 
о шостій годині Зроиг:паді-аї 5Боиг-і 
о шостій годині ранку Зроиг:пад|-аї Зроиг-і З ште:ро5і 
Уйте:арр | о шостій тридцять ранку Зроиг:паді-аї |51ееп:п | 5дес:бтах | 
фите:розі 


о шостій годині тридцять хвилин | 5Боиг:пад|-аї Зпоиг-і Зтіп:п-п 
о шостій годині тридцять хвилин | Зпоиг:пад)-ає 5рБоиг-і Зіп:п-й 5 іте:робі 


ранку 
одна хвилина фтіп:ллі 5 тіпі 
фпіпл-ц | дві хвилини; 53 хвилини фтіп:п2 фтіп2 
5 хвилин; 37 хвилин фтіп:п5 фтіп5 
20; 45 Здес:5тах |З4іє 5) 
фтіпп5 | 5;7 З4їдії5 
12; 15 фіееп:п. 
Таблиця 2 - Опис значень параметрів для часового призначення 
позначення укр. мова англ. мова 
перший опе 
другий їмо 
ЗБоиг:паді-аї 
двадцять третій бмепу Шгес 
ФЗВвоці-і годині о'єсЇосК 
одна опе 
фтіплі1 
п'ятдесят одна ПА опе 
дві бу 
фтіп:п2 ке Че 
п'ятдесят три ПАу Шгее 
десять теп 
фіееп.ла зд М 
дев'ятнадцять піпеїсеп 
двадцять суспіу 
5 4ес:50тах тридцять Фіпу 
сорок Богіу 
п'ядесят Пйу 
п'ять Пуе 
фаїсії5 
дев'ять піпе 
фтілі1 хвилина тіпиїе 
фиіп2 Хвилини тіпише 
фитїп5 хвилин тіпише 
ранку ат. 
Фіте:розі ди ВЕНЬ 
вечора р.а. 
ночі ат. 
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Для побудови всіх можливих речень мови усного діалогу можна використовувати 
так звану орієнтовану семантичну мережу (ОСМ) (1, |2|. Ця мережа одночасно задає об- 
межену граматику порядку слідування слів, яку можна використовувати при розпіз- 
наванні. 

Альтернативною до цієї граматики є граматика вільного поряду слідування слів. 
Між цими протилежними за суттю граматиками може бути побудовано безліч інших 
відносно вільних або відносно обмежених граматик. Ми пропонуємо дещо обмежити 
вільну граматику за рахунок лінгвістичного поняття про фонетичне слово. 

Під фонетичним словом розуміємо слово з невіддільними від нього супутніми 
словами. Наприклад, невіддільними є прийменник від іменника або прикметника, частка 
«не» спереду дієслова 1 частка «6» позаду нього. Пропонована нами відносно вільна 
граматика подається у вигляді графа (рис. 3), де рай - слово-пауза на початку та в кінці 
фрази, рсі - проклітик, ргер - прийменник, у/ - нейтральне слово, есі - енклітик. 


Звх 


Рисунок 3 - Граф відносно вільної граматики 
на основі поняття про лінгвістичне слово 


Втім, за такої граматики прийняття рішення щодо смислу речення не є оче- 
видним. Цьому питанню присвячено наступний розділ. 


Статистичне оцінювання належності послідовності слів 
до типу речень 


При розпізнаванні в умовах граматики, що не задає строгих обмежень на послі- 
довності слів, очевидно можуть бути отримані відповіді розпізнавання, що не вхо- 
дять у множину речень, які згенеровані певним типом речень. Це може бути зумовлено 
як помилками при розпізнаванні, так і при формуванні типів речень експертом. Крім 
того, сам користувач може вимовити речення з різного роду відхиленнями або агра- 
матизмами, наприклад, повторити деяке слово двічі. 
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Тому пропонується оцінювати ймовірність типу речення 57 з ОСМ за умови 
розпізнаної послідовності слів (у Му зиннз М, ) та оголошувати відповіддю інтерпретації 
той тип речень -- 5Т7, для якого ця ймовірність є найбільшою: 

ж 
ЗТ з агртах Р(5Т / ул, Умо зе УМ,), (1) 
5Т 


Імовірність у лівій частині (1) може бути переписана за формулою Байєса в 
наступному вигляді: 


Р(5Т/ маму ДЕР Муз, / ОТ), (2) 


п 


п 


Розглядаючи послідовність (мл, у»,..у,) як марківський процес, подаємо 


кожний із множників умовної імовірності у правій частині (2) у вигляді: 


РИ Мр, 8) є | | РСит, / ЗТ муз нора) з (3) 


Кеї 


РИ, Мо У) З ГП РО», І ЛНР (4) 


Каі 
де т 2 0-- порядок процесу. 
Оцінювання кожного з множників з правої частини виразів (3) 1 (4) може викону- 
ватися різними способами в залежності від обраного порядку процесу. 
Ми розглядали найпростіший випадок, коли пл - 0. Тоді, враховуючи формулою 
Байєса, вираз (2) подаємо у вигляді: 


п 
РІ(8Т / муз Муз У, ) є Р(ЗТ) | РОТ / ми.) з (5) 

Кеї 
Тут логічно зробити припущення щодо рівноїмовірності всіх типів речень. Хоч 
насправді, деякі смисли трапляються частіше за інші, і це залежить від попереднього 


змісту. Залишається обчислити вираз вигляду Р(5Т, / у»). Для цього розглянемо 57 (и, ) - 


множину типів речень, в яких зустрічається слово у/,. Тоді 


ІЗТ(и | , якщо 5Т (и, ) є 9, 


Р(5Т/ м) з 
Ге. а(5Т , У , в іншому випадку. 


(6) 


Вираз а(5Т - уп.) має зміст імовірності того, що слово у, розпізнано помилково 
замість деякого слова у: 57 (у») » 2. Цю ймовірність можна оцінити на основі деякої 
міри мінімальної редакторської правки «(у»,, у), наприклад, відстані Левенштейна. При 
обчисленні цієї міри штрафуються вставки, видалення та заміни символів фонемного 
тексту порівнюваних слів. Отже, вираз а(5 п ук.) пропонується оцінювати таким чином: 


а(ЗТ ут) з 1- тіп «ум 5Г | аипілаио) й (7) 


5Т (кб 

де Щи?) - кількість фонем у слові у/. 

Рішення щодо приналежності розпізнаної послідовності слів певному типу речень 
приймається на основі (1) - (7). 

Для апробації цього способу було проведено серію експериментальних досліджень. 


Експериментальні результати 


Запропоновані в роботі методи оцінювання належності послідовності слів до 
типу речень були експериментально перевірені на фразах, взятих із звичайного роз- 
мовника. В роботі для прикладу розглядалися три ПО: «Повсякденні фрази», «По- 
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дорож», «Готель». Ці ПО містять 47 -- 102 -- 68 - 217 типів змісту. В середньому на 
тип змісту припадає 4,17 базових речення. 

Акустичні моделі для декодера створено на основі мовленнєвого корпусу окремо 
вимовлених слів, в якій брало участь 60 дикторів |2). Засобами |3| проведено навчан- 
ня 55 прихованих марківських моделей фонем. Максимальна кількість нормальних 
законів у суміші - 20. 

Для експерименту довільним чином було вибрано 500 фраз. Смислова інтерпре- 
тація проводилася на основі відповіді пофонемного розпізнавача |4) за умов вільної 
та відносно вільної (на основі фонетичних слів) послівних граматик |2|. З результатів 
проведеного експерименту, наведених у табл. 3, випливає, що для двох типів граматик 
похибка змістовної інтерпретації не перевищує 596, що є прийнятним для прикладної 
системи. 

За умов обмеженої граматики швидкість розпізнавання в 10 разів перевищувала 
реальний час, а за умов вільної та відносно вільної граматик розпізнавання відбувалося 
швидше реального часу на ресурсах нетбука. 


Таблиця 3 - Результати розпізнавання та смислової інтерпретації 500 речень з 
двох предметних областей 


Тип Надійність розпізнавання (95) 
граматики 
Обмежена 96,7 94,1 98,3 
Вільна послівна 53.4 4,2 86,1 
Відносно вільна 79,1 20,8 96,2 


На основі проведених досліджень розроблено демонстраційну програмну модель 
перекладу речень, вимовлених українською мовою, на англійську мову (рис. 3). При 
цьому, слідування слів в українському реченні може бути будь-яким із допустимих, 
допускаються елементи спонтанності. Реченню, вимовленому українською мовою, 
ставиться у відповідність англомовний тип змісту або речення, а перше речення 
цього типу змісту оголошується результатом перекладу. 


"о 5рокеп Ріаіов 5їисіо - Гісопіів.Іуеї 


З віє Еф Мел  Міпфом Нер -єх 
оз ? 
Українська вісвреє інглійська 
бажаю Вам приємно зате ЇНауе а дооа іїте! 


провести час 


Рисунок 4 - Демонстраційне програмне забезпечення моделі 
усного фразника-перекладача 


Висновки 


Представлена в роботі система усного перекладу є електронним аналогом папе- 
рового розмовника, взаємодія з яким відбувається найбільш природними способом -- 
голосом. При розпізнаванні вимовленої користувачем фрази використовуються 
лінгвістичні та семантичні знання щодо обраної предметної області. Введені при 
цьому «м'які» обмеження на порядок слідування слів дають змогу підвищити надійність 
розпізнавання, не підвищуючи вимог до обчислювальних ресурсів. Розроблені програмні 
засоби дають змогу формувати граматики слідування слів для розпізнавання злитого 
мовлення як на основі типів речень, так 1 на основі лінгвістичного поняття про фоне- 
тичне слово. 
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Використання параметричних моделей типів речень надає можливість користуваче- 
ві більш вільно та розмаїто спілкуватися, що розширює коло використання системи. 
Припущення, що спостережувані послідовності слів є марківським процесом, дало змогу 
сформулювати більш гнучкий спосіб формування відповіді смислової інтерпретації. 

На основі експериментальної моделі розроблено програмну модель усного слов- 
ника-перекладача для перекладу з української мови на англійську в межах предметної 
області, що працює в межах реального часу на обмежених обчислювальних ресурсах. 

Одні і ті ж самі фрази з різною інтонацією можуть виражати як питальне речен- 
ня, так 1 розповідне. Отже, в подальшій роботі слід дослідити можливість розпізна- 
вання інтонації та ритму (просодики) з метою автоматичного розставляння розділових 
знаків у розпізнаних фразах. 

Надалі також планується ставити у відповідність україномовній фразі більш точ- 
ний англомовний відповідник серед типів речень з типу змісту. 
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В.В. Яценко 

Параметризация типов предложений предметной области для системь устного фразаря-переводчика 
В статье рассматриваются подходьі построения системьт перевода устного сигнала в рамках предметньтх 
областей. Блок интерпретации получаєт произнесенноє предложениєе в виде распознанной декодером 
последовательности слов. На вьїходе системьт принимаєтся решение о принадлежности распознанной 
последовательности слов типу предложения, которое задаєт тип смьгсла. Распознавание вьшолняется 
с учетом параметров, которьже описьвают множество возможньгх вариантов вьтсказьтваний во фразах 
при общениий. Проанализированьт альтернативньве подходьт моделирования ограничений на допустимье 
последовательности слов во фразах. 


У. Уаїзепко 

Рагатеїегігайоп ої 5епіепсе Турез іп а 5ибіесі Агеа Гог пе 5роКеп Шіегргеїег Зу5єет 

їп Фіз рарег ме де5сгібе Бе арргоасре5 Гог Биїйаште ої бе зроКеп ігап5іайоп зузівті ут зибіесі агеа5. 
Тре десодеа зедцепсе ої мога епіегя ї0 пе іпіегргеїайоп зиббузіет, мурісп йпайу плаке5 десізіоп сопсегпіпе 10 
Фе 5епіепсе гуре апа Ше гезресіїує плеапіпеє Куре Гог Пе ргопоцпседй иіегапсе. Роз5ібіе уагіайопя ої да/е, 
йте, ріасе еїс. їБаї тау оссиг іп 5епієпсе5 аге рагатеїегігед апа іпіертаїеа іо Бе Іапецаєє плоді. 5ігісі, 
їгес апа рпопейс уогая баз8ед оп ухога єгапитагя бог зреесії десодег аге апаЇугед. 
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